Theo Bruce Lanier Wright cho biết, "Palmer đã bị một chiếc xe tải đâm vào năm bảy tuổi và bị gãy lưng." Một ca phẫu thuật cột sống không thành công đã kìm hãm sự phát triển của Palmer (ông cao khoảng bốn feet) và khiến cho ông bị gù lưng.

Palmer vùi đầu vào trong khoa học viễn tưởng, mà ông đọc ngấu nghiến. Ông đã vươn lên hàng ngũ giới hâm mộ khoa học viễn tưởng và được ghi nhận, cùng với Walter Dennis, nhờ việc biên tập tờ fanzine đầu tiên, The Comet, vào tháng 5 năm 1930.[2]